b34639f74c93f0c9e477043ab181ed8e444f7565
BM25+bi_encoder+category_filters
- challenge
- Passage Retrieval
- submitter
- Marek
- submitted
- 2022-09-17 07:33:44.654922 UTC
- file basename
- out
test-A / 779e0dc49386b0c8417b72ac1f544b0ceab369a6
| Metric | Score |
|---|---|
| NDCG@10 | 53.66 |
dev-0 / a1597793fb6f6cf62bce92e7d40c9a73abeacf42
| Metric | Score |
|---|---|
| NDCG@10 | 37.16 |
worst items
note: the gold standard is taken from the challenge| # | input | expected output | actual output | test-A NDCG@10 |
|---|---|---|---|---|
| 1 | wiki-trivia W którym państwie leży Bombaj? | 42609-0 2856658-0 119428-0 | 698662-0 149882-0 41253-0 10796-4 1456386-4 173698-0 4935649-0 1938377-0 10796-1 161459-0 | 0.00 |
| 2 | wiki-trivia Do którego państwa należą wyspy Rodos i Korfu? | 1743-6 | 49767-0 49762-0 49762-17 4882462-0 4950313-0 3584220-0 3022006-0 261751-0 552904-0 109175-0 | 0.00 |
| 3 | wiki-trivia Jak nazywa się polski okręt bojowy, którym brał udział w II wojnie światowej, a od 40 lat znajduje się w Gdyni? | 4360-0 1932-49 4359-71 387651-2 | 306982-0 1932-11 4978480-17 1799291-27 4364-0 14103-0 9668-6 2456200-0 44884-95 4771271-0 | 0.00 |
| 4 | wiki-trivia Która zupa jest symbolem rzeczy bardzo taniej? | 2137401-4 | 3151996-1 4804390-6 3311571-3 7084-0 172179-0 68930-119 4667944-4 7084-1 109211-0 27226-83 | 0.00 |
| 5 | wiki-trivia Jak nazywa się najwyższy masyw górski Sudetów? | 9879-0 | 41288-4 4267890-31 552631-0 5465-8 506516-3 108372-0 2335169-0 1962017-0 1266374-0 5465-10 | 0.00 |
| 6 | wiki-trivia Jak nazywa się wędzony ser owczy produkowany w Tatrach? | 13012-0 13016-0 13015-0 13005-2 613908-4 | 73042-0 16198-0 937406-0 1948222-0 1695117-0 2920865-0 1622286-0 286789-0 3683882-10 2365048-0 | 0.00 |
| 7 | wiki-trivia Proszę podać polską nazwę pierwiastka o łacińskiej nazwie sulfur. | 5581-35 685902-0 | 11233-0 113874-3 1619-0 24742-3 11122-1 2214485-2 1893165-2 67063-5 46889-20 1807124-0 | 0.00 |
| 8 | wiki-trivia Jak nazywają się dwie liczby rzeczywiste, których wynik po dodaniu wynosi zero? | 736338-0 | 4468-0 30330-5 41147-0 889941-51 21016-0 9828-0 2026714-3 917904-18 10379-0 3289-7 | 0.00 |
| 9 | wiki-trivia Jak z łaciny nazywa się ćwiczenie ortograficzne polegające na zapisywaniu tekstu? | 962835-0 | 3332384-0 10185-0 1881208-0 3495342-0 4461671-2 420725-0 3311191-6 22568-0 4743082-0 474561-2 | 0.00 |
| 10 | wiki-trivia Jak nazywa się autobus elektryczny zasilany z sieci zawieszonej nad drogą? | 65401-0 | 45745-0 3820485-0 3820485-16 3820485-21 65919-4 35994-24 55330-0 48067-0 3820485-13 3820485-18 | 0.00 |
| 11 | wiki-trivia W którym państwie leżą tzw. Alpy Transylwańskie, czyli Karpaty Południowe? | 172832-0 1662028-0 1065819-0 1263801-11 1653912-0 | 2804-3 1263801-3 1835943-1 172832-2 3627945-5 172738-0 151507-1 43654-8 123722-1 277083-0 | 0.00 |
| 12 | wiki-trivia Jak nazywała się polska organizacja wojskowa, której dowódcami byli generałowie Grot, Bór, Niedźwiadek? | 733800-15 8777-0 27400-0 | 1717026-0 5014-227 1717026-4 1009063-0 1869015-2 1826272-186 9724-166 1005884-9 245782-0 64169-3 | 0.00 |
| 13 | wiki-trivia Jakim skrótem literowym oznacza się osobę o nieustalonej tożsamości? | 938989-0 57033-0 4162956-0 1249108-11 | 4792260-0 462601-4 183384-0 4144268-0 169994-11 2954023-0 525276-1 3552761-26 1422359-8 50997-6 | 0.00 |
| 14 | wiki-trivia Czy legalny syn Napoleona zasiadł na tronie Francji? | 425167-2 | 425167-7 395316-1 425167-1 2940512-2 568164-1 390349-0 420939-0 4729347-3 1367257-7 454391-1 | 0.00 |
| 15 | wiki-trivia Jak nazywa się postulat mówiący, że w atomie nie ma dwóch elektronów które by miały identyczne wszystkie cztery liczby kwantowe?… | 43681-0 | 15099-6 984901-6 2323537-0 1403-15 200-2 143094-17 4498-0 43683-2 984901-0 2332724-25 | 0.00 |
| 16 | wiki-trivia Z którego kontynentu pochodzą papużki nierozłączki? | 1507283-2 | 294104-10 4498545-2 4887687-6 1320346-0 115289-1 4916088-0 3823880-6 1507283-0 4504996-0 4916088-3 | 0.00 |
| 17 | wiki-trivia Na cześć kogo obchodzony jest dzień Kotana? | 44879-8 174481-12 86849-16 | 131487-0 910475-0 884674-8 1811110-0 1205819-0 2266338-0 2378349-2 960248-0 2937847-3 513838-381 | 0.00 |
| 18 | wiki-trivia Jak nazywa się na statku oficer zajmujący się sprawami gospodarczymi? | 558647-0 558647-1 | 837036-15 837036-0 16828-0 523654-0 837405-0 391783-12 514699-0 391783-0 391783-45 391783-13 | 0.00 |
| 19 | wiki-trivia Co po łacinie oznacza słowo „lupus”? | 330559-0 622969-2 63166-0 63166-49 63166-9 | 48275-46 1279124-0 4382751-2 27763-0 17122-0 22359-0 283467-5 16046-3 5190029-133 2426348-0 | 0.00 |
| 20 | wiki-trivia Jakie zwierzę widnieje w godle Wenecji? | 3517-75 517835-1 996055-5 | 93644-4 232870-10 1565923-2 2088525-4 195411-0 466133-0 180084-17 97425-2 2718107-13 2378349-2 | 0.00 |
| 21 | wiki-trivia Jak nazywa się instrument muzyczny i ogon cietrzewia? | 445920-18 | 72498-0 1361489-0 27576-0 6166-0 21480-0 3469201-8 20006-0 19844-0 1149482-3 3469201-0 | 0.00 |
| 22 | wiki-trivia Jedna z mitycznych gorgon oraz jamochłon morski mają wspólną nazwę? | 108851-0 108851-2 108851-4 27899-19 1877199-2 | 1877199-0 227878-0 107821-0 205592-0 953156-1 2803386-0 3127532-1 1595456-0 2037955-1 1885909-21 | 0.00 |
| 23 | wiki-trivia Kto był ojcem Pegaza? | 108851-11 269351-0 16435-1 | 55509-4 466724-0 101773-0 111684-3 12669-0 55509-2 55509-0 35903-1 11138-1 27899-48 | 0.00 |
| 24 | wiki-trivia Jak z francuskiego nazywa się pomieszczenie w teatrze, w którym widownia przebywa w trakcie przerwy? | 736692-0 | 46823-0 63342-6 1340382-0 41680-0 4185956-4 346162-0 47733-3 41675-1 1816371-30 1340382-1 | 0.00 |
| 25 | wiki-trivia Jak nazywa się elastyczna deska umożliwiająca wybicie przy skokach do wody? | 90738-0 2996100-0 2996414-0 2066472-0 4112844-1 | 306214-4 75981-20 4707566-0 117311-0 1194748-0 20754-1 1221053-0 75374-0 1874669-0 119743-0 | 0.00 |
| 26 | wiki-trivia W którym roku USA wypowiedziało wojnę Niemcom podczas I wojny światowej? | 7258-19 5603-62 18861-27 7767-17 | 3051465-2 2304-2 2274-101 2389-224 2389-51 7584-13 1826265-1 1938769-38 1754942-0 2389-0 | 0.00 |
| 27 | wiki-trivia Jakiego koloru jest pojęcie którego się nie ma? | 179111-7 1870244-3 1915957-24 6811-175 4638002-1 | 3051801-3 15734-1 15734-0 176516-6 928408-14 613908-156 827338-1 848511-1 19633-4 827338-5 | 0.00 |
| 28 | wiki-trivia Czy knock down to to samo co knock out? | 1380727-1 | 542190-0 285976-0 3989270-0 542190-2 562196-0 139364-8 684186-0 804476-11 2495658-51 1885909-9 | 0.00 |
| 29 | wiki-trivia Które miasto hitlerowskie wojska oblegały przez 900 dni? | 69825-23 187979-8 488000-4 2021657-10 1872515-22 | 7857-6 107282-3 3013181-0 53212-0 3101427-1 155690-1 1826272-198 1826265-66 1189634-5 167075-24 | 0.00 |
| 30 | wiki-trivia Co ma pod stopami Wenus na obrazie Botticellego pt. „Narodziny Wenus”? | 735677-2 | 24982-2 1402577-0 1196699-0 2864252-0 782621-1 2328705-1 4782422-0 1402577-1 735677-6 735677-8 | 0.00 |
| 31 | wiki-trivia Jakim kolorem określa się makabryczne żarty? | 470364-0 310912-0 627291-0 805497-4 645020-2 | 752495-19 1255736-1 2437774-0 1041-21 1073997-1 449661-21 307007-0 928408-14 2601737-6 3444603-12 | 0.00 |
| 32 | wiki-trivia W którym mieście odbywają się gale wręczenia Oscarów? | 12641-0 5042944-0 | 740096-0 12829-0 4360953-0 4058-0 3079995-0 2295663-14 4058-1 14490-0 3617020-0 14061-0 | 0.00 |
| 33 | wiki-trivia Jak nazywają się jadalne liście cebuli? | 1786116-0 682947-1 | 52157-5 2416144-29 52157-0 92858-2 935878-1 14390-9 471194-0 52157-16 4626563-3 1894844-0 | 0.00 |
| 34 | wiki-trivia Na jakim instrumencie gra Woody Allen? | 178421-12 | 820518-0 820518-1 27576-53 19634-0 402811-0 1262078-0 113286-3 122809-3 2931697-42 6166-0 | 0.00 |
| 35 | wiki-trivia Czy Polska zdobyła złoty medal olimpijski w siatkówce męskiej? | 187899-2 166508-10 2929730-71 | 2929730-39 2929730-101 4387583-4 3468850-0 166508-2 839758-2 3810133-1 650564-0 515389-3 1072947-8 | 0.00 |
| 36 | wiki-trivia W którym mieście przed II wojną światową prezentowana była Panorama Racławicka? | 124980-0 | 124980-18 498369-2 383559-1 9721-20 124980-22 1294480-1 124980-3 124980-23 124980-8 4647364-0 | 0.00 |
| 37 | wiki-trivia Jak nazywa się rytualne japońskie samobójstwo? | 5897-1 2477-188 131390-30 | 478763-0 4310611-0 2626296-0 2626296-6 2626296-5 5897-0 2626296-11 2626296-3 2626296-9 133333-4 | 0.00 |
| 38 | wiki-trivia Jak miał na imię miś o małym rozumku z popularnej dobranocki? | 447145-2 1032777-9 4349408-1 | 839765-0 551528-0 1073997-1 5021899-1 111920-41 153997-0 3216693-1 5052017-0 5201172-0 99735-0 | 0.00 |
| 39 | wiki-trivia W którym wieku powstała formalnie w Niemczech Hanza? | 54298-25 | 44109-0 44109-1 44109-2 669462-0 44109-9 282862-7 2034660-20 7470-136 2910258-2 360920-6 | 0.00 |
| 40 | wiki-trivia Co oznacza stwierdzenie, że ktoś jest w błogosławionym stanie? | 127933-7 | 3023-82 1223065-3 186488-5 1007635-6 1831359-20 97073-0 102924-14 555130-4 3666214-6 185958-31 | 0.00 |